Comparison on OpenStack and OpenNebula performance to improve multi-Cloud architecture on cosmological simulation use case

With the increasing numbers of Cloud Service Providers and the migration of the Grids to the Cloud paradigm, it is necessary to be able to leverage these new resources. Moreover, a large class of High Performance Computing (hpc) applications can run these resources without (or with minor) modifications. But using these resources come with the cost of being able to interact with these new resource providers. In this paper we introduce the design of a hpc middleware that is able to use resources coming from an environment that compose of multiple Clouds as well as classical hpc resources. Using the Diet middleware, we are able to deploy a large-scale, distributed hpc platform that spans across a large pool of resources aggregated from different providers. Furthermore, we hide to the end users the difficulty and complexity of selecting and using these new resources even when new Cloud Service Providers are added to the pool. Finally, we validate the architecture concept through cosmological simulation ramses. Thus we give a comparison of 2 well-known Cloud Computing Software: OpenStack and OpenNebula. Key-words: Cloud, IaaS, OpenNebula, Multi-Clouds, DIET, OpenStack, RAMSES, cosmology ∗ ENS de Lyon, France, Email: [email protected] † ENSI de Bourges, France, Email: [email protected] ‡ INRIA, France, Email: [email protected] Comparison on OpenStack and OpenNebula performance to improve multi-Cloud architecture on cosmological simulation use case Résumé : Avec l’augmentation du nombre de fournisseurs de service Cloud et la migration des applications depuis les grilles de calcul vers le Cloud, il est ncessaire de pouvoir tirer parti de ces nouvelles ressources. De plus, une large classe des applications de calcul haute performance peuvent s’excuter sur ces ressources sans modifications (ou avec des modifications mineures). Mais utiliser ces ressources vient avec le cot d’tre capable d’intragir avec des nouveaux fournisseurs de ressources. Dans ce papier, nous introduisons la conception d’un nouveau intergiciel hpc qui permet d’utiliser les ressources qui proviennent d’un environement compos de plusieurs Clouds comme des ressources classiques. En utilisant l’intergiciel Diet, nous sommes capable de dployer une plateforme hpc distribue et large chelle qui s’tend sur un large ensemble de ressources aggrges entre plusieurs fournisseurs Cloud. De plus, nous cachons l’utilisateur final la difficult et la complexit de slectionner et d’utiliser ces nouvelles ressources quand un nouveau fournisseur de service Cloud est ajout dans l’ensemble. Finalement, nous validons notre concept d’architecture via une application de simulation cosmologique ramses. Et nous fournissons une comparaison entre 2 intergiciels de Cloud: OpenStack et OpenNebula. Mots-clés : Cloud, IaaS, OpenNebula, Multi-Clouds, DIET, OpenStack, RAMSES, cosmologie Comparaison de performance entre OpenStack et OpenNebula et les architectures multi-Cloud: Application la cosmologie.3